Text copied to clipboard!

Titel

Text copied to clipboard!

Spark Udvikler

Beskrivelse

Text copied to clipboard!
Vi søger en erfaren og engageret Spark Udvikler til at styrke vores data engineering team. Som Spark Udvikler vil du spille en central rolle i udviklingen og vedligeholdelsen af vores big data-løsninger, der understøtter forretningskritiske beslutninger og analyser. Du vil arbejde tæt sammen med data scientists, softwareudviklere og forretningsanalytikere for at sikre, at vores dataplatforme er skalerbare, pålidelige og effektive. Dine primære opgaver vil inkludere design og implementering af databehandlingspipelines ved hjælp af Apache Spark, optimering af eksisterende dataflows og integration med forskellige datakilder og systemer. Du vil også være ansvarlig for at sikre datakvalitet, overvåge performance og bidrage til den tekniske arkitektur. Vi leder efter en person med stærke tekniske færdigheder, der har erfaring med distribueret databehandling og en passion for at arbejde med store datamængder. Du skal være komfortabel med at arbejde i et agilt miljø og være i stand til at kommunikere tekniske løsninger klart til både tekniske og ikke-tekniske interessenter. Vi tilbyder et dynamisk arbejdsmiljø med mulighed for faglig udvikling, fleksible arbejdstider og adgang til de nyeste teknologier inden for big data og cloud computing. Hvis du brænder for data og ønsker at være en del af et innovativt team, så er dette jobbet for dig.

Ansvarsområder

Text copied to clipboard!
  • Udvikle og vedligeholde databehandlingspipelines med Apache Spark
  • Integrere data fra forskellige kilder og systemer
  • Optimere performance og skalerbarhed af dataflows
  • Sikre datakvalitet og pålidelighed
  • Samarbejde med data scientists og softwareudviklere
  • Bidrage til design af teknisk arkitektur
  • Overvåge og fejlfinde Spark jobs
  • Dokumentere løsninger og processer
  • Implementere bedste praksis for big data-udvikling
  • Deltage i agile udviklingsprocesser

Krav

Text copied to clipboard!
  • Erfaring med Apache Spark (batch og/eller streaming)
  • Stærke programmeringsfærdigheder i Scala, Java eller Python
  • Kendskab til Hadoop-økosystemet
  • Erfaring med cloud-platforme som AWS, Azure eller GCP
  • Forståelse for databasedesign og SQL
  • Erfaring med versioneringsværktøjer som Git
  • Evne til at arbejde selvstændigt og i teams
  • Gode kommunikationsevner
  • Erfaring med CI/CD og DevOps-principper er en fordel
  • Bachelor- eller kandidatgrad i datalogi eller lignende

Mulige interviewspørgsmål

Text copied to clipboard!
  • Hvor mange års erfaring har du med Apache Spark?
  • Hvilke programmeringssprog har du brugt til Spark-udvikling?
  • Har du erfaring med streaming data og realtidsbehandling?
  • Hvilke cloud-platforme har du arbejdet med?
  • Hvordan sikrer du datakvalitet i dine løsninger?
  • Har du erfaring med at arbejde i agile teams?
  • Kan du beskrive en kompleks dataplatform, du har arbejdet på?
  • Hvordan håndterer du performanceoptimering i Spark?
  • Hvilke værktøjer bruger du til overvågning og fejlfinding?
  • Er du bekendt med DevOps og CI/CD-processer?